•  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
더 보기

LB/ADC BS 작업(r17 Blame)

r17
r1
mrkim

(새 문서) 		1[목차]
2== 개요 ==
3LSM/ADC 서버 BS 작업 시 참고 할만한 체크리스트를 작성 하였다.
4
r15
mrkim
5
r17
mrkim
6==# 작업 중 장애 트러블 슈팅 #==
r16
mrkim
7서버 부팅중 발생한 내용은 [[서버 행업 시 트러블 슈팅|행업 트러블 슈팅]] 관련 문서 확인
r15
mrkim
8
9
10===# LSM/ADC 관련 작업 중 발생했던 장애 #===
11
121. 이중화 기동 여부 확인
13 원인 : ADC 서버가 부팅 후 active 권한을 가져 LSM에서 구동중인 프로세스 및 VIP가 두대 동시에 올라가진 상태
14 방안 : ADC 서버의 VIP 확인 후 LSM 과 동일한 VIP Down[*명령어 ifconfig xxx down ] [br] 작업 전 프로세스 상태를 백업 한 파일을 활용해 프로세스 Down
15
16
r6
mrkim
17== LSM/ADC 서비스 실행 프로세스 및 포트 정보 ==
r11
kskim
18||<tablealign=left><tablewidth=400><tablebordercolor=#cccccc><-2> '''프로세스 및 포트 정보''' ||
19||<width=70%> '''프로세스 명''' ||<width=30%> '''포트 번호''' ||
r6
mrkim
20|| LFMServer || 8549 ||
21|| LFMSinkModule || 8550 ||
r14
mrkim
22|| [[LoadBalancer2|LoadBalancer2]] || 50890 ||
r6
mrkim
23|| ADSController || 904 ||
24|| ADSClient || 911 ||
25|| L_ADS || 30000 ||
26|| L_GSDM || 18079 ||
27|| L_NRM || 18081 ||
28|| file_requester || 18084 ||
29|| cache_manager || 8081 ||
30|| NetIOServer3 || 32128 ||
31|| CiMonitoringAgent || 30002 ||
r14
mrkim
32|| [[CiGLBServer|CiGLBServer]] || 확인 후 추가 ||
r6
mrkim
33
34
r12
kskim
35== LSM/ADC BS 작업 체크리스트 ==
36||<tablewidth=100%> 순서 / 체크 항목 || 명령어 || 기준 값 || 결과 ||
37||<|2> 사전 || 서버 공통 체크리스트 점검 || [[서버 공통 체크리스트|서버 공통 체크 리스트]] || 부팅 전 상태 확인을 위한 점검 || ||
38|| [[GTV 서버 점검 스크립트|서버 점검 스크립트]] || ./Server_Check.sh 7 LSM or ADC || 모든 항목이 이상없음 상태입니다. 문구 출력 시 정상 || ||
39||<|12> 부팅 후 || 시스템 로그 확인 || tail -F /var/log/messages[br]egrep -i "error|fail" /var/log/messages || Error/Fail 로그 없을 시 정상 || ||
40|| 서버 공통 체크리스트 점검 || [[서버 공통 체크리스트|서버 공통 체크 리스트]] || 부팅 후 상태 확인을 위한 점검 || ||
41|| 백업 환경 비교 || diff [사전 백업 파일] [현재 상태] || 부팅 전 백업한 파일과 상태가 동일할 시 정상 || ||
42|| LoadBalancer 로그 확인 || tail -F /var/log/castis/lb_log/EventLog_*.log[br]egrep -i "error|fail" /var/log/castis/lb_log/* || "Selected for Client StreamID" 로그가 계속 출력 될 경우 정상 || ||
43|| CiGLBServer 로그 확인 || egrep -i "error|fail" /var/log/castis/glb_log/* || "Successfully New Setup Session" 로그가 지속적으로 출력 될 경우 정상 || ||
44|| LFMServer 로그 확인 || tail -F /var/log/castis/lfm_log/* || 배포 성공(6)이 계속 출력 될 경우 정상 [*1 6: 배포 성공, 5: 부분 성공, 4: 배포 실패 ] || ||
45|| ADS 로그 확인 || tail -F /var/log/castis/adc_log/* || “[MovieFile::SyncByteCheck] PASSED” 확인 [br] PackLoss가 50% 미만인지 확인 || ||
46|| L_GSDM 로그 확인 || tail -F /var/log/castis/gsdm/*_gsdm.log || "success to alloc" 로그가 지속적으로 출력 시 정상 || ||
47|| 동적배포 실패 건수 || egrep -i "error|fail" /var/log/castis/gsdm/* || 3개 이상 시 중앙서버 통신 상태 점검 || ||
48|| 큐톤 파일 요청 개수 || cat [GLB_LOG] | grep 'p=c1' | grep RequestFullFileName -c || 요청수와 응답수를 비교하여 검증 || ||
49|| [[GTV 서버 점검 스크립트|서버 점검 스크립트]] || ./Server_Check.sh 7 LSM or ADC || 모든 항목이 이상없음 상태입니다. 문구 출력 시 정상 || ||
50|| 세션 할당 확인 || lbstat || 대역폭/세션 정상 수치 및 증가 확인 [*예시 Ex) [br] vod40199 Running 2.1139G / 15G [14%] 276 / 3750 [7%] 27.6387T / 30.7235T [89%] [br] vod40200 Running 2.17629G / 15G [14%] 299 / 3750 [7%] 27.6381T / 30.7235T [89%] ] || ||